Họ Hoxha là biến thể Albania của Hodja, một tước hiệu được ban cho tổ tiên ông vì những nỗ lực của họ trong việc giảng dạy Hồi giáo cho người Albania.[103]

Cha mẹ của Enver Hoxha là Halil và Gjylihan (Gjylo) Hoxha, và bản thân ông có ba chị em gái tên là Fahrije, Haxhire và Sanije. Hysen Hoxha là người bác/chú của Enver Hoxha và là một chiến sĩ đã vận động mạnh mẽ cho nền độc lập của Albania, sự kiện xảy ra khi Enver mới được bốn tuổi. Ông nội Beqir của ông từng tham gia vào nhóm Gjirokastër của Liên minh Prizren.[104]

Con trai của Enver Hoxha là Sokol Hoxha, người là giám đốc điều hành của Bưu điện và Viễn thông Albania, ông ta kết hôn với Liliana Hoxha.[105] Người con gái của Hoxha mang tên Pranvera, bà là một kiến trúc sư. Cùng với chồng là Klement Kolaneci, bà đã thiết kế Bảo tàng Enver Hoxha trước đây ở Tirana, một công trình hình kim tự tháp lát màu trắng. Bảo tàng mở cửa vào năm 1988, ba năm sau cái chết của cha bà. Công trình nay là tòa nhà của Trung tâm Văn hóa Quốc tế.[106]